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МОБИЛЬНЫЕ КОШЕЛЬКИ 


Международный поставщик ПО для банков и финтехов . 
ПРОЦЕССИНГ ТРАНЗАКЦИЙ 


Z 


Лидер рынка no оценке Aite, Gartner, Ovum 
Решения работают B 77 странах мира 
15% карт и магазинов в Европе 
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88% банковских карт в России 


Что такое кошелек 


Fintech company 


Г. 
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Что такое кошелек 


Mobile 


[SE 


Web 
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Кому нужны кошельки 


Банкам 
Национальным платежным системам (СБП и похожим) 
Крупным торговым сетям 


Закрытым системам расчетов (PayPal, ЮМопеу, ...) 
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Какие клиенты бывают 


Большие - 100+ млн клиентов, 5 000 платежей в секунду 
Маленькие - 1 млн. клиентов, 50 платежей в секунду 
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Большие - 100+ млн клиентов, 5 000 платежей в секунду 
Маленькие - 1 млн. клиентов, 50 платежей в секунду 
Богатые - готовы купить любой софт с поддержкой 
Бедные - нет денег даже на нормального DBA 
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В Европе - GDPR, много регуляторов 

В третьем мире - законы пишутся на ходу 
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Какие клиенты бывают 


Большие - 100+ млн клиентов, 5 000 платежей в секунду 
Маленькие - 1 млн. клиентов, 50 платежей в секунду 
Богатые - готовы купить любой софт с поддержкой 
Бедные - нет денег даже на нормального DBA 

В Европе - GDPR, много регуляторов 

В третьем мире - законы пишутся на ходу 

Старые - своя сложившаяся инфраструктура 

Новые - даже не думали про инфраструктуру 
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Нужно дешевое, масштабируемое, неприхотливое и кастомизируемое 
решение. 
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Нужно дешевое, масштабируемое, неприхотливое и кастомизируемое 
решение. 


Внутренний стартап: 
- свобода в выборе технологий 
- свобода в выборе процессов 
- 2 pizza team 
- доступ к специалистам в компании 
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Архитектура 
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Архитектура 


Architecture is about the important stuff. 
Whatever that is. 
Ralph Johnson 
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Архитектура 


Архитектура как необходимые выборы 
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OLTP 
OLAP 
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OLTP: 
надежность 
масштабируемость 
бесплатность 
простота эксплуатации 
поддержка 
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OLTP: 
надежность Oracle 
масштабируемость Posteress-DB 
бесплатность Menge 
npocrora эксплуатации 
поддержка 
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OLTP: 
надежность Oracle 
масштабируемость Posteress-DB 
бесплатность Menge 
npocrora эксплуатации Foundation DB 
поддержка 
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FoundationDB 


Open-source distributed scalable transactional (ACID) key-value database with 
crazy thorough testing 
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FoundationDB 


Open-source distributed scalable transactional (ACID) key-value database with 
crazy thorough testing 


«haven't tested foundation in part because their testing appears to 
be waaaay more rigorous than mine.» 
Kyle Kingsbury (@aphyr) 
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FoundationDB — особенности 


Her платной поддержки 
Низкоуровневый сложный АР! 
Нет ограничений доступа 


Слабый инструментарий 
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FoundationDB — особенности 


Her платной поддержки 


предоставляем клиентам поддержку самостоятельно 
Низкоуровневый сложный АР! 
Нет ограничений доступа 


Слабый инструментарий 
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Her платной поддержки 
предоставляем клиентам поддержку самостоятельно 


Низкоуровневый сложный АР! 


написали свою библиотеку с поддержкой асинхронного доступа, 
типизацией, сериализацией B CBOR, поддержкой house-keeping 
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FoundationDB — особенности 


Her платной поддержки 
предоставляем клиентам поддержку самостоятельно 


Низкоуровневый сложный АР! 


написали свою библиотеку с поддержкой асинхронного доступа, 
типизацией, сериализацией B CBOR, поддержкой house-keeping 


Нет ограничений доступа 
добавили в библиотеку криптографию и управление ключами 


Слабый инструментарий 
сделали свой движок миграций типа Flyway 
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OLTP: 
FoundationDB 


OLAP: 
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OLTP: 
FoundationDB 


OLAP: 
Clickhouse 


(C) Дельгядо Филипп, 2021 27 (н HighL оаа++ 
Весна2021 


Архитектура 


Архитектура как необходимые выборы 
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Прочие выборы 


Polyglot development vs one lang to rule them all 
Kotlin vs CH vs Java 
Flutter vs React Native 


REST 1 vs REST 2 vs gRPC 
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Прочие выборы 


Polyglot development vs one lang to rule them all 
Kotlin vs CH vs Java 
Flutter vs React Native 


REST 1 vs REST 2 vs gRPC 
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Архитектура 


Архитектура как язык 
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Архитектура сервисов 


Backoffice Portal 
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PUSH/SMS 


Onboarding Payments 


API 
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Архитектура 


Архитектура как управление сложностью 
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Бизнес-сценарии 


Онбординг: 

3-10 шагов, 3-5 подсистем, десятки сервисов 
Платеж: 

2-5 шагов, 2-5 подсистем, несколько сервисов 


Блокировки, КҮС management, etc. 
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Саги 


Разбиваем бизнес-процесс на множество локальных шагов 
Для каждого шага проектируем компенсацию 


Фиксируем список выполненных шагов 


В случае ошибки запускаем все компенсации на пройденные шаги 


https://microservices.io/patterns/data/saga.html 
https://www.cs.cornell.edu/andru/cs711/2002fa/reading/sagas.padf 
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Обычно нужно He отменить процесс, a дожать ero другим способом 
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Обычно нужно He отменить процесс, a дожать ero другим способом 


Компенсации не всегда возможны 
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Обычно нужно He OTMeHMTb процесс, a дожать ero другим способом 


Компенсации не всегда возможны 


Компенсация нужна не для операции, а для всего процесса 
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Обычно нужно He OTMeHMTb процесс, a дожать ero другим способом 
Компенсации не всегда возможны 
Компенсация нужна не для операции, а для всего процесса 


Сложно учитывать ограничения всей бизнес-транзакции (время 
выполнения, бюджет транзакции M т.п.) 
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Обычно нужно He OTMeHMTb процесс, a дожать ero другим способом 
Компенсации не всегда возможны 
Компенсация нужна не для операции, а для всего процесса 


Сложно учитывать ограничения всей бизнес-транзакции (время 
выполнения, бюджет транзакции M т.п.) 


Код получается довольно сложный 
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Workflow 


Описываем процесс как императивный код из отдельных шагов 
При выполнении сохраняем результат каждого шага 

При проблемах с шагом — стараемся его повторять 

При падении сервера повторяем весь процесс 


Для исключительных ситуаций пишем такой же workflow 


(Cadence 
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Библиотека, a He сервис 

С удобным DSL 

С поддержкой более 100 000 одновременных сценариев 
С поддержкой до 20 000 шагов в секунду 


Foundation DB + Kotlin 
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Haydn4k 


onboard(data: OnboardingData) : Clientld = play ( 
val identityld = step { identityService.nextld () } 
step { identityService.create (identityld, data.credentials) } 
val clientld = step { clientService.create (identityld, data.clientlnfo) } 
геїигп@ play clientld 


}.ОПЕГГОГ | 


step { if (clientld!2null) clientService.remove(clientld) ) 


step { if (identityId!2null) identityService.remove(identityld) ) 


}.азупс() 
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Идемпотентность M повторяемость 


“Идемпотентность — свойство операции при повторном применении 
давать тот же результат, что и при первом” 
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Идемпотентность M повторяемость 


“Идемпотентность — свойство операции при повторном применении 
давать тот же результат, что и при первом” 


Повторяемость — возможность повторять операцию без нежелательных 
последствий 
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Haydn4k 


suspend fun onboard(data: OnboardingData) : Clientld = play 
(uniqueld = (data.phone]) { 

deadline - now().plusSeconds(30) 

val identityld = step ( identityService.nextld () } 

step ( identityService.create (identityld, data.credentials) ) 


step( policy = (rpsLimit = 10 }) 
{ govService.checkcCitizen(data.fio, data.document, uniqueld) } 


val isCitizen = waitSignal { it is CheckCitizenComplete } 
If (lisCitizen) step ( fbiService.report (data.fio, data.document) } 
val clientld = step ( clientService.create (identityld, data.clientInfo) } 


return(2 play clientld 


await) 
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Haydn4k — возможности 


Длительная заморозка 


Все возможности Resilience4J 
circuit-breaker, limits etc 


Мягкое восстановление при сбоях 
Сложная обработка ошибок 
Интеграция с ktor 


Метрики и логирование 
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Haydn4k — производительность 


Примерно 2000 uiaroB B секунду Ha экземпляр FDB 
1 core + 4GB + 4000 IOPS 


Примерно горизонтальное масштабирование 


Можно подменить FDB на что-то побыстрее 
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Сигналы для Haydn4k 


События, отправляемые с сервера на клиент 
Server Sent Messages 


Внутренние события 
Отправка SMS, отчеты по расписанию M т.п. 


Очереди пользовательских задач 
Изменения параметров кошелька M т.п. 
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Queue — требования 


10+ млн. очередей 
О - 1000 событий в очереди 
50К+ событий в секунду 


Гарантии at least once 
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10 тп topic problem 


Kafka 
He больше 200k partitions 
РСУДБ 
не больше 10К событий в секунду 


RabbitMQ 
не больше сотен тысяч очередей 


(С) Дельгядо Филипп, 2021 (н HighL оаа++ 
Весна 2021 


Queue – решение 


FoundationDB – хранение самих очередей 
в одной записи несколько событий 
несколько (обычно одна) записей на очередь 
house-keeping 


Kafka — нотификации no изменениям 
воркеры узнают, какая очередь изменилась 
читают целиком из FDB, сохраняют изменения 
очереди распределяются по партициям 
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Архитектура 


Архитектура как точки зрения 
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Архитектура продукта 
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Стратегии конфигурации и кастомизации 


Параметры конфигурации 
Точки изменения функциональности 
Точки расширения функциональности 


Кастомизации 
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Стратегии конфигурации и кастомизации 


Параметры конфигурации 

Точки изменения функциональности 
Точки расширения функциональности 
Кастомизации 


Kotlin DSL 
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Kotlin DSLs 


Код Ha kotlin 

DSL для конкретной задачи 
Хранится в общем config service 
Компилируется при старте 
Выполняется при необходимости 


Включает инструменты для написания скриптов 
настроенная ide, скрипты сборки, скрипты для тестов M т.п. 
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Kotlin DSLs 


Формирование описания платежа 


Специфические сценарии 
блокировки, изменение документов, онбординг 


Проверка правил доступа (АВАС) 
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Архитектура продукта 
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Другие viewpoints 


Кастомизация 
Авторизация/Аутентификация 
Связность сервисов 
Безопасность 

Высокая доступность 
Интернационализация 


Обеспечение качества 
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Авторизация / Аутентификация 


10+ млн внешних пользователей 
10 000 внутренних пользователей 


Разные механизмы подтверждения операций 


Разные модели доступа 
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Авторизация / Аутентификация 


Самописный сервис IAM/CIAM 
с возможностью подключать внешние [AM 


Множество разных сценариев аутентификации 
КВАС через конфигурацию 
АВАС через Кот DSL 
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Связность сервисов — требования 


Работа в чужой инфраструктуре 
Простота в развертывании и в поддержке 


Реализация HA/LB 


Централизованное управление конфигурацией 
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Связность сервисов 


Собственный service-mesh 
service-locator, load balancing, heartbeat, lua scripts etc 


Написан на Java+Netty 
13 000 rps на ядро 


Средняя задержка 0.4 ms 
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Итого 


Кот + Foundation DB 
Kotlin API first development 


Собственный workflow engine, service mesh 
Kotlin DSLs 


Libraries over services 
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Итого 
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Итого 


Архитектура как необходимые выборы 
Архитектура как язык 
Архитектура как управление сложностью 


Архитектура как точки зрения 
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как необходимые выборы 
как язык 

как управление сложностью 
как точки зрения 

как непрерывный процесс 
как организация 

как ограничения 


как гарантии 
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